Can LLMs Time Travel? Enhancing Temporal Consistency in Legal Agentic Search through Reinforcement Learning
法律大模型能否穿越时间?基于强化学习增强法律智能体搜索的时序一致性
🧭 时序感知的Agent法律检索RL训练 ★ 深度解读
HKUST · Tsinghua University · University of Waterloo
提出 LegalSearch-R1,通过时序索引训练与混合检索增强的强化学习框架,大幅提升法律智能体的时序一致性与检索精度。
📌 工作参考价值(4 点)
- 时序感知的双工具架构:本地 RAG(精确检索版本化法规条文)搭配在线 web_search(获取司法解释和评论)。电商场景可类比:本地 RAG 存商品规格、价格等结构化信息,web_search 补充社媒评测与市场动态;RL 训练让 Agent 学会根据问题时间上下文自动路由。
- RL 训练使 Agent 主动在查询中嵌入时间约束:无需显式标注,通过 GRPO 与 entropy-based advantage shaping 即可学会在高熵决策点(如规划期)加入时间短语。推荐智能体可借鉴,处理季节性商品、时变用户偏好时自主注入时间信号。
- 时间索引 RAG 管道:对知识库条目标注生效时间窗口,检索时按查询时间过滤候选,确保只返回当时有效的条目。适用于政策规则、促销规则、商品生命周期等具有版本更迭的业务知识。
- 奖励函数设计:针对异构任务(背诵条文、罪名预测、咨询评价)设计不同评分(ROUGE-L 阈值、无序匹配、LLM judge),兼顾格式合规。多任务 RL 训练时可按任务难度分配不同 reward shaping,防止简单任务主导。